基于时空特征和分层模型的人体行为识别研究

【摘要】图像和视频数据的海量增长,以及赋予计算机以人类视觉系统的能力的渴望推动计算机视觉的研究和应用不断向前发展。通过计算机对视频进行处理,分析与理解是计算机视觉的一个热点研究领域,而人体行为识别是计算机视觉领域的一个重要研究方向。人体行为识别通过分析视频序列中人体的相关特征来确定人体行为的类别,它涉及图像处理、人工智能和模式识别等多门学科。人体行为识别在反恐行动、公共安全、人机交互、辅助驾驶、虚拟现实、视频检索等军民领域有着广泛的应用价值和应用前景。人体行为识别的关键在于特征的选择和提取以及行为的分类。本文围绕人体行为识别的相关问题进行研究,通过采用引入正交平面概念的时空局部特征点提取方法提取兴趣点,进而提取时空局部特征描述信息,然后通过分层模型生成对视频序列中人体行为的多层次表示来实现人体行为识别。主要完成了以下工作：本文在现有方法的基础上,通过引入正交平面的概念,在时空特征点提取和时空局部特征描述两个方面进行了改进,提出了一种新的时空特征点提取方法和时空局部特征描述方法。该时空特征点提取方法将整个视频序列视为三维立方体,在任一维度上的平面检测兴趣点,借助集合的运算和弱约束规则获得时空特征点；该时空特征描述方法对以时空特征点为中心构造的时空立方体内的像素点采用中心对称扩展的方法构造部分重叠的小立方体,利用组合梯度方向直方图和光流直方图,加权生成高维时空局部特征描述子,并采用局部保留投影算法获得时空局部特征描述子的低维向量表示,从而保留时空局部特征描述子所包含的局部信息。通过引入特征池的概念,构建分层‘’bag-of-words”模型,形成输入一个底层局部特征而输出多个不同粒度的人体行为描述的机制。通过该模型所获得的人体行为描述能够兼有底层的局部信息和局部特征之间的结构信息。本文在通用的标准测试视频库上进行了实验,验证了本文所提方法的可行性和有效性。实验表明采用本文所提出的时空特征点提取方法所提取的时空特征点具有较好的稳定性和代表性；所提取的时空局部特征描述较好地捕捉了人体的外观和运动信息,局部保留投影的方法更好地保留了所包含的局部信息；分层模型所生成的人体行为描述获得了优于其他方法的识别效果。
【作者】吴江伟；
【导师】肖国强；
【作者基本信息】西南大学，计算机应用技术，2014，硕士
【关键词】时空局部特征；分层模型；人体行为识别；正交平面特征点；

【参考文献】
[1]孔鹏.油气井后处理生产应急智能监控系统研究[D].北京邮电大学,机械工程（专业学位）,2013,硕士.
[2]王文.新型车载防盗报警定位系统的设计[D].中北大学,控制理论与控制工程,2013,硕士.
[3]刘晓庆.嵌入式SRAM编译器设计与IP验证[D].安徽大学,电路与系统,2014,硕士.
[4]谢洪明,周健,程宣梅.“全球浙江,全球浙企,全球浙商”——以全球化战略引领浙江中长期发展[J].浙江经济,2014,22:26-27.
[5]宋祯.中国服务贸易模式背离倾向的相关实证研究[D].吉林财经大学,国际商务（专业学位）,2014,硕士.
[6]郭仁安.望城路桥项目成本管理改进研究[D].湖南大学,会计学,2010,硕士.
[7]杨祎诺.TaC/Ti_3SiC_2复合材料的制备、结构与性能研究[D].西安建筑科技大学,材料物理与化学,2013,硕士.
[8]郑毓倩.异样的黑色光芒[D].西安外国语大学,比较文学与世界文学,2014,硕士.
[9]徐丽莉.贴片机贴片元件路径优化的研究[D].苏州大学,控制理论与控制工程,2013,硕士.
[10]康乐.基于XDPS-400+的汽包水位报警、预警系统设计与实现[D].西安电子科技大学,软件工程,2011,硕士.
[11]CB聿伯,彭世蕃.后张法予应力混凝土梁[J].南昌水专学报.1982(00)
[12]高宏宾.知识库中精确知识的判定算法[J].五邑大学学报(自然科学版),2003,04:8-12.
[13]孟尔盛.难忘的九天——记前往美国科罗拉多矿业学院接受荣誉学位及顺访勘探地球物理学家学会(SEG)[J].石油地球物理勘探,2006,02:243-247.
[14]王智勇,肖锋,赵晓铎,胡沙沙,徐鹏,齐市委.特高压站低压侧保护设备大电流闭锁方案设计[J].电力系统自动化,2014,07:123-126.
[15]张希玲.高校“去行政化”舆论的议程设置研究[D].首都师范大学,教育学原理,2013,硕士.
[16]廖声刚.验证时断信号准确性方法探讨[J].石油地球物理勘探,1997,S2:156-159+190.
[17]冉启全,李士伦.流固耦合油藏数值模拟中物性参数动态模型研究[J].石油勘探与开发,1997,03:61-65+100.
[18]孙丽娜.语言迁移对中国学生习得英语关系从句的影响[D].吉林大学,外国语言学及应用语言学,2013,硕士.
[19]颜伟,田甜,张海兵,伏进,毛国志,刘志宏.考虑相邻时段投切次数约束的动态无功优化启发式策略[J].电力系统自动化,2008,10:71-75.
[20]梅博,丁利,程云辉,许宙,王利兵.纳米材料在SPR生物传感器中的应用进展[J].包装工程,2015,01:24-28+79.
[21]李仁伟.现代派美术与信息传达[D].山西大学,美术学,2004,硕士.
[22]曹哲.地锚式三塔四跨悬索桥地震响应分析[D].西南交通大学,建筑与土木工程,2013,硕士.
[23]王琦.四沟隧道洞口滑坡事故的分析和治理[D].华中科技大学,建筑与土木工程,2013,硕士.
[24]李升波,徐少兵,王文军,成波.挡位离散型车辆经济性加速策略的伪谱法优化[J].自动化学报.
[25]贾罡哲.腹水多项指标的联合检测对诊断卵巢上皮性癌价值的探讨[D].中国医科大学,妇产科学,2004,硕士.
[26]王青娟.危险品道路运输应急救援路径优化及评价[D].重庆交通大学,载运工具运用工程,2012,硕士.
[27]尹晶晶.瓦斯无线监测网络低功耗传感节点的研究[D].东华大学,电子与通信工程（专业学位）,2014,硕士.
[28]冷淑娟.奢侈品品牌户外新技术媒体整合投放策略研究[D].上海外国语大学,工商管理,2014,硕士.
[29]王艳艳.凤眼莲和甘蔗渣三素构成对其酶解产糖影响的模拟与实证研究[D].华中农业大学,环境工程,2014,硕士.
[30]张超.交互式问答中的指代消解研究[D].苏州大学,计算机应用技术,2014,硕士.
[31]王宝.汉字图形化设计的形、意研究[D].苏州大学,艺术（专业学位）,2014,硕士.
[32]彭武良,王成恩.产品开发项目的离散时间/成本/质量平衡问题研究[J].控制与决策,2009,03:423-428+434.
[33]吴素馨.村镇银行与农户共生模式创新研究[D].北京交通大学,金融学,2012,硕士.
[34]马晓艳.除皱手术相关面神经解剖学研究[D].遵义医学院,人体解剖与组织胚胎学,2012,硕士.
[35]殷琳.我省“营改增”政策效应分析[D].苏州大学,税务（专业学位）,2014,硕士.
[36]谢冰洁.竹材特性在家居产品中的应用与创新[D].浙江理工大学,艺术设计（专业学位）,2014,硕士.
[37]蔡云龙.泰国学生汉语习得社交语用失误分析[D].吉林大学,语言学及应用语言学,2014,硕士.
[38]申金鑫.互联网与抗争行动研究[D].西南政法大学,政治学理论,2012,硕士.
[39]张莉.基于遗传算法的多序列比对算法研究[D].湖南大学,计算机科学与技术,2011,硕士.
[40]彭建军.振荡浮子式波浪能发电装置水动力性能研究[D].山东大学,机械制造及其自动化,2014,博士.
[41]李金国,邝献涛,刘宏,杨涛.一个银行网络审计和风险预警系统的研究与设计[A].中国计算机学会计算机安全专业委员会、中国电子学会计算机工程与应用学会计算机安全保密分会.第十八次全国计算机安全学术交流会论文集[C].中国计算机学会计算机安全专业委员会、中国电子学会计算机工程与应用学会计算机安全保密分会:,2003:4.
[42]赵仲兴.2000年黄浦江水质污染展望[J].上海环境科学.1984(01)
[43]王小明.基于J2EE技术的软件过程改进系统研究与实现[D].南京航空航天大学,计算机应用技术,2004,硕士.
[44]孔少锋,郭蕾,王勇.片状CoS-石墨烯复合材料用于锂离子电池负极材料[A].中国硅酸盐学会固态离子学分会.第17届全国固态离子学学术会议暨新型能源材料与技术国际研讨会论文集[C].中国硅酸盐学会固态离子学分会:,2014:1.
[45]施国强.广播电视发展趋势及我们面临的机遇和挑战[J].中国新闻科技.2000(07)
[46]刘婷,井元伟,姜囡,张嗣瀛.TCSC系统的自适应minimax干扰抑制控制器设计[J].控制与决策,2013,12:1894-1897.
[47]祝文山.淫羊藿素抑制肺癌A549细胞增殖的机制研究[D].华中科技大学,生物制药工程,2013,硕士.
[48]高鹏.论教育学知识的科学化[D].东北师范大学,教育学原理,2014,博士.
[49]庄永生.德州工行客户经理绩效管理研究[D].天津大学,2004.
[50]王勇.基于WRF模式的酒泉风电基地近地层风场特征模拟研究[D].兰州大学,气象学,2012,硕士.